Rumah pertama yang dibina di kawasan Chifley adalah Rumah Bunnerong, yang dibina pada tahun 1825. Sebilangan besar tanah di kawasan itu dimiliki oleh Mahkota; semasa Depresi pada tahun 1930-an, tanah disewakan kepada orang-orang yang mendirikan rumah di kawasan itu secara beransur-ansur, dalam jangka waktu yang lama. Chifley diberi nama Ben Chifley (1885–1951), Perdana Menteri Buruh Australia pada akhir Perang Dunia II. Majlis Randwick menjadikan kawasan itu, yang merupakan sebahagian dari Matraville selatan, sebuah pinggiran bandar yang terpisah pada tahun 1964.[2]

Kompleks perumahan awam yang besar didirikan di kawasan itu pada tahun 1960-an. Ini menampilkan sejumlah bangunan empat dan lima tingkat, ditambah beberapa bangunan yang lebih kecil yang berisi akomodasi bergaya bedit, di mana ruang santai dan kamar tidur digabungkan dalam satu kamar.[3]